[발표자료] AWS Data Pipeline VS AWS Glue : 어떻게 다를까요?

안녕하세요 송영진입니다.

11월 18일 두 번째로 열리는 이벤트인 Developers.IO Korea Online가 있었습니다. 저는 AWS Data Pipeline VS AWS Glue : 어떻게 다를까요? 라는 제목으로 Data Pipeline과 Glue를 소개하는 세션을 담당했습니다.

다음은 발표자료와 발표영상입니다.

발표내용

발표내용은 다음과 같습니다

• 배경지식
  • ETL
  • 데이터분석
• AWS Data Pipeline의 소개
• AWS Glue의 소개
• 요약

이러한 내용으로 Data Pipeline과 Glue에 대해 같은 ETL 서비스지만 어떻게 다른지 어떤 특징이 있는지 소개하는 발표였습니다.

더욱 자세한 내용은 공식 문서를 참조해주세요

AWS Data Pipeline 설명서

AWS Glue 설명서

소감

AWS Glue 서비스는 기능이 다양하지만 오늘은 많이 요약한 내용으로 ETL이 이루어지는 과정으로 설명드렸습니다. 처음 쓰기에는 어려울지 몰라도 익숙해지면 굉장히 편하게 쓸 수 있는 서비스가 아닐까 싶습니다.

또, 최근 2020년 11월 12일에 AWS Glue DataBrew라는 이름으로 코드를 쓰지 않고 데이터 전처리가 가능한 비쥬얼 데이터 준비 도구라는 엄청난 서비스가 등장했기 때문에 다음에는 그 쪽도 공부해보고 블로그나 이번과 같은 이벤트로 소개를 해드리고 싶네요.